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摘要 : [目的 /意义 ] 分 析 科 研 众 包 项 目的 协作 模式 ,为 我 国 在 开放 环境 下 开展 协作 研究 提供 理论 指导 和 行 
动 指 南 。[ 方 法 /过 程 ] 通 过 分 析 Crowd. Research 项 目的 协作 过 程 , 从 公众 科研 人 员 招 莫 、 研 究 过 程 协作 、 结 果 提 
交 、 成 果 产 出 4 方面 入 手 , 详 细 说 明 各 部 分 的 关键 步骤 ,总 结 Crowd Research 对 我 国 发 展 科研 众 包 项 目的 启示 。 
[结果 /结论 ] 研究 发 现 ,Crowd Research 基于 众 包 思想 ,发 展 了 一 种 新 型 的 科研 协作 模式 ,公众 科研 人 员 在 专业 
fL A. i 的 带领 下 可 以 协作 参与 研究 过 程 , 包 括 自主 选择 里 程 碑 、 同 行 评估 提交 内 容 、 互 相 分 配 贡 献 值 、 合 作 发 
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作为 一 种 分 布 式 问 题解 决 方式 , 众 包 (crowdsourc- 
in&) 弄 式 自 提出 以 来 在 商业 和 学 术 领 域 得 到 了 快速 的 
发 展 。 应 用 于 学 术 领 域 的 众 包 一 般 称 为 科研 众 包 
(Gowdsourcing research) , 它 是 一 种 新 的 科研 项 目 组 织 
方 武 ,通过 互联 网 聚集 全 球 科研 人 员 的 智慧 ,协作 进行 
科学 研究 ,共同 解决 科研 难题 ”。 科 研 众 包 支持 公 
众 作 为 研究 人 员 参 与 到 科研 过 程 中 ,引发 了 基于 群体 
参与 及 协作 的 公众 科学 (citizen science) 科研 组 织 模 
XC 。 随 着 跨 领域 大 型 科研 协作 项 目 中 引入 众 包 过 
程 ,科研 众 包 从 公众 仅 作 为 科研 辅助 角色 参与 项 目 特 
定 阶 段 的 传统 模式 ,逐渐 演化 为 公众 与 专业 研究 人 员 
共同 参与 科研 项 目 全 流程 的 新 型 模式 。 传 统 模式 中 ， 
项 目 任务 被 分 解 为 多 个 独立 的 微 任 务 (micerotask )” , 
这 类 任务 对 公众 的 技能 要 求 低 且 公众 容易 理解 和 接 
受 ,公众 主要 从 事 劳 动 密集 型 的 基础 性 工作 ,如 数据 收 
集 、 数 据 分 析 、 照 片 分 类 等 ,处 于 科研 项 目的 外 围 且 参 
与 程度 低 , 与 专业 科研 人 员 发 生 的 交互 行为 较 少 。 以 


典型 的 Evolution MegaLab 项 目 为 例 ” ,专业 科研 人 员 
设计 了 Evolution MegaLab 的 所 有 流程 ,公众 仅 负 责 收 
集 所 在 地 附近 带 状 蜗牛 的 颜色 纹路 、 变 化 等 特征 信 
息 。 然 而 , 随 着 跨 机 构 、 跨 学 科 及 国际 性 科研 合作 成 为 
一 种 趋势 ,特别 是 互联 网 在 科研 领域 的 渗透 性 发 展 ,为 
超越 机 构 ,学科 领域 .国界 的 科研 群体 组 建 研究 团队 、 
解决 项 目 难题 提供 了 新 机 遇 , 引 发 了 专业 科研 人 员 和 
公众 协同 参与 并 设计 科学 研究 的 新 科研 众 包 模式 。 在 
这 种 新 型 模式 中 ,公众 不 再 作为 辅助 角色 ,而 是 作为 项 
目 团队 成 员 ,参与 研究 过 程 的 所 有 阶段 ,包括 产生 项 目 
提案 、 设 计 任 务 原 型 .开展 实验 、 合 作 发 表 科研 成 果 。 
公众 在 整个 项 目的 实施 过 程 中 充分 发 挥 了 主观 能 动 
性 与 专业 研究 人 员 的 协调 互动 行为 越 多 越 多 。 近 年 
来 ,许多 高 校 和 科研 机 构 都 在 探索 "专业 科研 人 员 + 公 
众 科 人 研 人 员 ” 协 同 模 式 ,其 中 最 典型 的 是 由 加 州 大 学 圣 
克 鲁 斯 分 校 和 斯 坦 福 大 学 联合 发 起 的 Crowd Re- 
search ^ 项 目 。 与 其 他 科研 协作 模式 相 比 , Crowd. Re- 
search 项 目 具 有 以 下 优势 :将 众 包 思想 融 人 协作 模式 
中 ,通过 在 线 招募 吸引 了 一 大 批 公众 研究 人 员 ,扩展 了 
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研究 队伍 ,强调 了 科学 研究 和 学 术 交 流 的 开放 性 ;不 需 
要 预先 定义 项 目 目标 及 工作 流 , 所 有 项 目 均 是 在 专业 
科研 人 员 的 指导 下 ,由 公众 科研 人 员 协 同 完成 ,体现 了 
项 目 实施 的 灵活 性 及 可 扩展 性 ;确立 了 里 程 碑 (mile- 
stone) 视频 会 议 等 新 型 在 线 科 研 协作 方法 ;为 多 人 合 
作 完成 的 科研 成 果 提 供 了 个 人 贡献 的 识别 方法 。 
目前 我 国 科 研 众 包 的 研究 和 实践 尚 处 于 起 步 阶 
段 , 在 组 织 模式 和 运作 机 制 方面 缺乏 较为 成 功 和 可 推 
广 应 用 的 案例 经 验 。 鉴 于 此 ,本文 拟 对 Crowd. Research 
的 协作 模式 进行 分 析 研 究 ,希望 可 以 为 我 国 更 快 更 好 
地 发 展 科研 众 包 项 目 提供 借鉴 参考 。 


2 Crowd Research 研究 概况 


= 为 了 发 据 学 生 的 研究 兴趣 和 研究 潜力 ,探索 教授 
稍 学 生 之 间 开 展 大 规模 协作 研究 的 可 能 性 ,美国 加 州 
:学 圣 克 鲁 斯 分 校 和 斯 坦 福 大 学 的 教授 于 2015 EH 
联 会 开 展 了 一 项 名 为 “The Aspiring Researcher Chal- 
lepge" 的 大 规模 在 线 实 验 活动 ”… ,成 立 了 “斯 坦 福 公 众 
DEDAK” (Stanford Crowd Research Collective) 。 随 着 
HARSI AUR. 出 现 了 一 系列 的 问题 ,如 开放 式 研究 环 
境 昌 如 何 对 大 批 公众 进行 协调 ?项目 负责 人 如 何 识别 
团队 成 员 的 个 人 贡献 ? 为 了 解决 上 述 问 题 , 该 活动 衍 
ERT crowd research 人 研究 计划 ,重点 进行 组 织 和 协调 
JA fx 众 科研 人 员 开 展开 放 式 研究 模式 探索 .产生 公 
众 畦 研 人 员 在 科研 众 包 项 目 中 科学 贡献 的 分 配 和 职 
a a 
了 目前 ,Crowd Research BART 3 个 大 型 计算 机 科 
学 领域 的 研究 项 目 , 分 别 是 设计 下 一 代 众 包 平 台 (De- 
sign the Next -Ceneration Crowdsourcing Platform - Dae- 
合 人 机 视 党 算法 (Hybrid Human -Computer Vi- 
sion Algorithms) .探索 群体 智慧 ( Exploring the Wisdom 
of Crowds), 3 个 项 目 由 斯 坦 福 大 学 、 加州 大 学 圣 克 鲁 
斯 分 校 和 康 奈 尔 大 学 的 教授 作为 项 目 领 导 人 以 及 来 自 
62 个 国家 1.500 多 位 研究 人 员 共 同 参 与 ”。 其 中 ， 
Daemo 项 目 (HCI) 的 负责 人 为 斯 坦 福 大 学 的 M. Bern- 
stein 主要 目标 是 创建 一 个 自我 管理 的 众 包 平台 ; 
合 人 机 视觉 算法 ”项 目 由 加 州 大 学 圣 克 和 鲁 斯 分 校 
be J. Davis 教授 和 康 奈 尔 大 学 的 S. Belongie 教授 联合 
负责 ,主要 探索 众 包 系统 与 机 器 推理 技术 的 深度 融合 
方法 ; “探索 群体 智慧 ”项 目的 负责 人 为 斯 坦 福 大 学 的 
S. Goel 教授 ,主要 通过 开展 大 规模 实验 探索 并 利用 多 


mo) ,混合 


样 化 的 群体 智慧 。 

在 为 期 两 年 (2015 -2017 年 ) 的 时 间 里 ,Crowd Re- 
search 项 目 取 得 了 显著 成 效 。 首 先 , HCI 项 目 组 发 布 了 

一 版 Daemo FE” ,成 功 创建 了 包含 500 多 篇 维基 

百科 文章 、10 000 多 个 问题 答案 对 的 数据 集 , 基 于 这 项 
工作 的 论文 在 EMNLP 2016 上 获得 了 最 佳 论 文 奖 ;Dae- 
mo 平台 也 成 功 进 入 第 15 期 “骑士 新 闻 挑 战 赛 ” 
( Knights News Challenge) 的 决赛 ,有 望 获得 新 一 轮 的 资 
金 及 人 才 支 持 。 此 外 ,有 关 Daemo 平台 研发 的 论文 在 
EMNLP 2016 上 获得 了 最 佳 论文 奖 。 截 至 目前 ,Crowd 
Research 项 目 团队 围绕 项 目 实施 过 程 .平台 运作 流程 、 
任务 设计 参与 者 反馈 等 方面 在 ACM 等 顶级 学 术 会 议 
上 合作 发 表 了 9 篇 学 术 论 文 “ ,值得 注意 的 是 ,大 部 分 
论文 由 者 干 位 作者 合作 完成 ,公众 科研 人 员 研 究 和 角色 
和 贡献 得 到 了 明确 承认 。 以 会 议论 文 On Optimizing 
Human Machine Task Assignments Jy ff]? ,共有 54 位 合 
著作 者 ,作者 被 进一步 细 分 为 组 织 者 (5 位 ) .高 级 研究 
人 员 (19 位 ) 及 研究 人 员 (30 位 ) 。 

公众 通过 参与 Crowd Research 项 目 , 可 以 获得 著 
名 教授 推荐 信 , 目 前 ,已 有 29 位 公众 参与 者 依靠 专家 
推荐 信和 实现 了 向 麻 省 理工 学 院 、 加 州 大 学 伯克利 分 
校 .斯坦福 大 学 、 卡 内 基 梅 隆 大 学 等 高 校 的 职业 流动 
和 晋升 o Crowd Research 基于 众 包 思 想 , 为 开放 环 
境 下 公众 参与 科学 人 研究 提供 一 套 行 之 有 效 的 协作 模 
gs 


3 Crowd Research 开放 协作 模式 


大 型 科研 众 包 项 目 通 常 需要 成 百 上 千 科 研 人 员 实 
时 协作 ,时间 跨度 长 ,任务 类 型 多 样 , 需 要 定义 明确 的 
协作 工作 流 。Crowd Research 项 目的 组 织 流 程 主 要 包 
含 4 个 核心 步骤 , 即 组 织 招募 公众 科研 人 员 、 同 步 协 
作 、 结 果 提 交 及 成 果 产 出 ( 见 图 1)。 公 众 科研 人 员 的 
开放 招募 指 通过 在 线 征 募 方式 为 项 目 招募 公众 参与 者 
并 对 其 进行 技能 培训 。 同 步 协 作 指 专业 科研 人 员 与 公 
众 科 研 人 员 共 同 参与 项 目 设 计 及 实施 的 全 谱 段 ,定义 
阶段 目标 ,定期 评估 研究 进展 。 结 果 提 交 指 公众 科研 
人 员 按 照 规 定 的 进度 按时 提交 研究 结果 。 oe 
要 通过 整合 不 同 研 究 人 员 的 学 术 贡 献 产 出 合作 型 论 
成 果 。 基 于 此 ,本文 围绕 Se bein 
协作 .研究 结果 提交 、 集 体 协作 学 术 成 果 产 出 4 方面 对 
Crowd Research 项 目的 协作 模式 进行 分 析 。 
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cx cx [S 
开放 同步 结果 成 果 
招募 协作 提交 产 出 
公开 招募 专业 科研 人 员 与 定期 提交 以 整合 多 位 研究 
及 培训 公众 协作 参与 各 类 成 果 人 员 学 术 贡 献 的 
参与 者 研究 过 程 方式 产 出 合作 论 
x 


1 Crowd Research 项 目 工作 流 


3.1 公众 参与 者 招募 及 培训 模式 
参与 者 招募 是 决定 众 包 项 目 能 否 成 功 的 关键 因素 
之 一 。 除 项 目 负 责 人 外 ,Crowd Research 3 个 项 目 参 与 
者 均 是 来 自 于 在 线 招募 的 公众 科研 人 员 。 
3.1.1 公众 参与 者 招募 ”围绕 招募 对 象 、 招 募 方式 、 
激励 措施 3 方面 对 Crowd Research 招募 模式 进行 分 析 。 
招 幕 对 象 方面 , Crowd Research 没有 对 参与 者 的 学 历 、 
性 副职 业 进 行 限制 , 所 有 感 兴趣 的 科研 爱好 者 均 可 参 
HEOIR 2017 年 10 月 ,3 个 项 目 共 招 收 了 来 自 62 个 
281.697 名 公众 科研 人 员 "" ,其 学 历 结构 见 图 2。 不 
难 发 现 ,公众 科研 人 员 的 学 历 差异 较 大 ,最 低 学 历 为 高 
| 检 雪 高 为 博士 研究 生 , 但 拥有 高 中 学 历 和 博 十 学 历 的 
PEPA BAL i 5% ,大 部 分 参与 者 学 历 为 本 科 和 硕士 。 
就 由 别 比例 而 言 ,所 有 参与 者 中 女性 占 28% ,但 是 不 
同 珊 目 间 公 众 性 别 差异 较 大 。 就 公众 参与 者 类 型 而 
FRUIRE 研究 人 员 , 也 包括 华尔街 的 数据 科学 
Adi PETRI .设计 人 员 等 。 
© 7396 
za à; 


096 296 3% 
本 科学 历 。 “硕士 研究 生 学 历 “博士 研究 生 学 历 
参与 者 学 历 


2 Crowd Research 项 目 公 众 参 与 者 学 历 信息 


招募 方式 方面 ,Crowd Research 实行 非 定 向 招募 和 
定向 招募 相 结合 的 招募 方法 ,提供 了 全 球 在 线 招募 平 
& ,吸引 全 球 公 众 参与 任何 一 个 已 发 布 的 项 目 ,并 通过 
公共 网 页 描述 了 项 目 任 务 、 所 属 机 构 及 项 目 负 责 人 等 
言 息 。 此 外 ,Crowd Research 还 通过 在 Twitter 和 Face- 
book 等 社交 媒体 上 分 享 招聘 信息 、 以 及 通过 开放 邮件 
列表 向 大 学 教 职 人 员 群 发 邮件 等 方式 吸引 感 兴趣 的 公 
As 
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激励 措施 方面 ,通过 参与 Crowd. Research JJ H , 4 
众 参 与 者 一 方面 可 以 获得 团队 协作 的 研究 经 验 ,提升 
科学 素养 ,建立 人 际 关系 网 ; 另 一 方面 ,也 有 机 会 与 著 
名 教授 在 顶级 期 刊 上 合作 发 表 论 文 以 及 获得 推荐 信 ， 
实现 继续 教育 或 职业 晋升 。 
3.1.2 公众 参与 者 培训 ”由 于 Crowd Research 在 招 
募 阶 段 并 未 对 参与 者 进行 较 多 限制 ,因此 ,需要 通过 培 
训 提 升 公众 参与 者 对 项 目的 认识 、 提 高 承担 项 目 任 务 
所 需要 的 专业 技能 。Crowd Research 提供 里 程 碑 和 视 
频 讲 座 两 种 培训 形式 ( 见 表 1) 。 项 目 负 责 人 每 周 为 公 
众 确立 具体 项 目 目 标 , 称 为 一 个 里 程 碑 " ,其 提供 的 
培训 内 容 包 括 阅 读 文献 .学习 编程 方法 、 参 与 实验 设计 
等 ;视频 讲座 可 以 进一步 加 深 公 众 科 研 人 员 对 项 目的 
了 解 , 激 发 其 研究 兴趣 。 

表 1 Crowd Research 为 公众 参与 者 提供 的 培训 

培训 形式 培训 内 容 
里 程 碑 。 要 求 公众 参 与 者 阅读 文献 ,提交 评论 
。 学 习 编程 教程 
。 参 与 实验 
视频 会 议 讲座 。 讲解 研究 所 需 的 基本 概念 
。 概括 讲解 项 目 主题 相关 内 容 


e 邀请 著名 研究 人 员 开展 学 术 讲座 


3.2. 研究 过 程 协 作 模 式 

协作 创新 是 发 展 科 研 众 包 项 目的 重要 途径 ,Crowd 
Research 借鉴 了 高 校 中 "导师 负责 制 " 的 人 才 培 养 模式 
并 对 其 进行 了 扩展 ,致力 于 构建 一 个 开放 和 可 扩展 的 
大 学 实验 室 (Open and Scalable University Laborato- 
ries) ,利用 互联 网 吸引 世界 各 地 的 非 职 业 科研 人 员 
以 及 来 自 世 界 名 校 的 专业 科研 人 员 在 虚拟 的 研究 环境 
中 协作 开展 研究 ,实现 了 研究 经 验 的 开放 共享 和 研究 
成 果 的 择优 选择 。 围 绕 管理 团队 人 研究 里 程 碑 、 讨 论 交 
流 3 方面 对 Crowd Research 的 协作 过 程 进行 研究 。 
3.2.1 建立 管理 团队 多 人 基于 同一 项 目 实时 协作 
虽然 可 以 利用 群体 智慧 .提高 项 目 效率 ,但 却 为 项 目 管 
理 增 加 了 难度 ,需要 灵活 的 管理 方法 对 协作 过 程 进行 
管理 。Crowd Research 通过 借鉴 MapReduce 算法 ,提出 
了 一 种 “分 解 + 组 合 ”的 团队 管理 方法 ,分 解 方法 是 
将 大 量 的 公众 参与 者 分 成 若干 小 组 ,这 些小 组 基于 同 
一 项 目 目 标 并 行 工 作 。 当 项 目 任务 面临 研究 人 员 技 能 
或 时 间 局 限时 , 则 采用 组 合 方法 整合 多 个 小 组 解决 项 
目 难 题 。Crowd Research 管理 框架 见 图 3。 首 先 , 同 大 
多 数 大 型 项 目 管理 一 样 ,Crowd Research 会 为 众 包 项 目 
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设 定 一 个 项 目 负 责 人 (principal investigator, PI) , PI 可 
以 是 教授 .研究 人 员 或 任何 具有 较 强 研究 能 力 和 丰富 
研究 经 验 的 专业 科研 人 员 ,主要 任务 是 发 掘 创造 性 的 
想法 .指导 项 目 参 与 者 并 承担 整个 项 目的 管理 责任 。 

每 个 项 目 负责 人 会 聘用 两 名 研究 助理 (research assis- 


目标 并 进行 任务 分 配 ” , 周 例会 召开 时 间 为 每 周一 上 
午 九 点 (PST 时 间 ) 。 在 为 期 1 小 时 的 会 议 上 ,首先 ,项 
目 负 责 人 对 上 周 研究 里 程 碑 目 标 及 进展 作 简要 回顾 ; 

其 次 ,项 目 负责 人 或 研究 助理 邀请 该 周 获得 高 评分 的 
公众 科研 人 员 分享 并 解释 提交 内 容 ;最 后 ,项 目 负责 人 


tant, RA) ,RA 需 每 周 花 费 几 小 时 来 指导 公众 进行 项 目 
参与 分析 公众 提交 的 内 容 . 回 答 有 关 项 目 流 程 的 疑 
问 。 此 外 ,每 个 里 程 碑 拥有 一 个 直接 责任 人 (Directly 
Responsible Individual ,DRI) ,DRI 可 以 来 源 于 公众 的 自 
也 可 以 由 PI 任命 ,主要 是 协调 并 帮助 公众 科 
人 员 完 成 里 程 碑 目 标 ,具体 活动 包括 组 织 视频 会 议 、 
nn 汇总 结果 。PI 来 源 于 项 目 发 起 方 ,而 RA 和 
DRI IESUS 


ya 来 自 项 目 发 起 广 


图 3 Crowd Research 管理 团队 
CD D ` 
SOL 确定 研究 里 程 碑 FI 负责 的 众 包 项 目 都 有 一 


人 钱 各 的 研究 周期 ,公众 科研 人 员 参 与 研究 周期 的 全 
A. ,包括 产生 新 思想 、 设 计 任 务 原 型 .开展 实验 、 提 
着 分 析 结 果 撰写 论文 等 。 每 一 阶段 包含 多 个 研究 
稳 碑 ,其 由 一 名 DRI 负责 ,要 求 公众 参与 者 每 周 工作 
5 £D 小 时 完成 任务 。Crowd Research 已 发 布 的 研究 
里 去 碑 包括 调查 众 包 平 台 用 户 需求 .设计 实验 方案 . 运 
行 钼 法 。 研 究 里 程 碑 的 数量 随 项 目 进度 而 定 ,项 目 早 
期 阶段 ,每 周 仅 设 立 一 个 研究 里 程 碑 , 随 着 项 目 不 断 推 
进 ,每 周 会 有 多 个 里 程 碑 并 行 运作 ,公众 科研 人 员 可 以 
自由 选择 里 程 碑 , 但 需 在 每 周 截止 日 期 进行 内 容 提 交 。 
此 外 ,Crowd Research 的 每 个 项 目 都 包含 一 个 维基 页 
面 ,项 目 PI RA 会 定期 上 传 所 有 里 程 碑 的 详细 信 
g Uo] 
3.2.3. 讨论 交流 “讨论 交流 在 协作 研究 中 非常 重 
要 ,团队 成 员 及 时 沟通 有 助 于 及 时 了 解 项 目 进展 ,彼此 
交流 有 关 的 研究 设想 nali 项 目 负责 人 可 以 据 
此 及 时 判断 研究 方向 是 否 发 生 偏 离 。Crowd Research 
主要 通过 视频 会 议 及 Slack ru 目 参与 者 提供 交 
流 渠 道 ,辅助 方式 为 电子 邮件 。 
项 目 负责 人 通过 召开 周 例会 (YouTube 网 站 的 在 
线 视频 会 议 ) 与 项 目的 公众 参与 者 讨论 下 一 步 的 项 目 


o 


确立 下 周 研究 里 程 碑 ( 见 图 4) 。 周 一 上 午 9 时 至 周 日 
上 午 8 时 ,公众 科研 人 员 基 于 里 程 碑 开展 研究 并 提交 
结果 ; 周 日 上 午 8 时 至 下 周一 上 午 9 时 ,公众 科研 人 员 
对 所 有 提交 内 容 进行 同行 评估 , 选 出 较 好 的 结果 供 项 


目 负 责 人 在 下 周一 会 议 上 集中 讨论 。 为 了 方便 公众 参 
与 者 随时 查看 会 议 内 容 , 视 频 可 以 自动 播放 和 存档 。 


为 了 保证 参 会 人 员 禾 盖 面 ,PI 会 轮流 邀请 不 同 地 域 .不 
同 研 究 背景 的 公众 科研 人 员 加 入 视频 会 议 。 受 网 络 流 
量 限 制 ,未 能 加 入 会 议 群 组 的 公众 科研 人 员 可 通过 
Slack 论坛 关注 会 议 动态 ,PI 会 对 Slack 上 的 用 户 疑 问 
做 出 回应 。 


召开 周 例会 ， 
回顾 上 周 里 程 碑 ， 同 行 评 估 ， 选 出 。 开始 新 一 轮 
JEER REAR 的 循环 


设 定 本 


E4 Crowd Research 周 例会 时 间 


除 视频 会 议 外 ,公众 科研 人 员 还 可 以 通过 Slack 论 
坛 进行 交流 。Slack 论坛 支持 参与 者 创建 兴趣 小 组 , 基 
于 同一 小 组 ,参与 者 可 以 提出 问题 .互相 帮助 。 为 了 更 
好 地 管理 Slack 论坛 , Crowd Research 基于 访问 频率 ,将 
Slack 论坛 分 为 低 访问 区 和 高 访问 区 , 低 访 问 区 主要 是 
管理 团队 针对 公众 一 些 常规 问题 进行 解答 ,高 访问 区 
是 面向 特定 里 程 碑 建立 的 交流 小 组 。 除 正式 渠道 外 ， 
公众 科研 人 员 也 可 以 利用 Turker Nation .mTurk Grind , 
Reddit ,mTurk Forum 等 外 部 论坛 进行 交 
3.3 研究 结果 提交 模式 

基于 同一 研究 里 程 碑 ,每 周 会 有 多 位 公众 科研 人 
员 提 交大 量 的 内 容 给 项 目 负责 人 ,项 目 负责 人 很 难 在 
短 时 间 内 对 所 有 内 容 进 行 阅读 分 析 。 针 对 此 问题 ， 
Crowd Research 提出 了 一 种 迭代 同行 评分 (Peer-grad- 
ing) Jr ik ^ , 即 公众 科研 人 员 之 间 通 过 反复 评估 选 出 
小 部 分 质量 较 高 的 内 容 供 PI 或 RA 参考 ,目的 是 最 大 
限度 减少 PI 工作 量 ,加 大 公众 参与 度 , 具 体 流程 见 
5。 首 先 ,多 位 公众 科研 人 员 提 交 里 程 碑 任 务 ,初步 形 
成 数量 庞大 质量 参差 不 齐 的 内 容 集 。 其 次 ,在 为 期 一 
天 的 评估 时 期 内 ,公众 参与 者 查看 彼此 的 提交 结果 ,给 
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图 二 情报 三 作 
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ChinaXiv 合 作 期 刊 


出 评论 意见 ,投票 选 出 较 好 的 内 容 , 并 将 结果 反馈 给 PI 
或 RA。 紧 接着 ,PI 和 RA 根据 里 程 碑 目标 选择 一 种 排 
序 方式 形成 内 容 列表 。 最 后 ,基于 排序 结果 ,PI 或 RA 
分 析 并 选择 出 少数 最 具 代 表 性 的 提交 内 容 作 为 下 次 周 
例会 的 讨论 主题 , 据 此 制定 下 一 次 里 程 碑 , 开 始 新 一 轮 
的 循环 。 


多 个 公众 参与 者 每 周 在 截止 日 期 前 提交 里 程 碑 内 容 ， 形 成 初步 


公众 参与 者 查看 彼此 的 提交 内 容 ， 给 出 评论 意见 ， 投 票选 出 


PI 和 RA 为 最 佳 内 容 选 择 一 种 排序 方式 ， 如 基于 内 容 
排序 或 基于 公众 参与 者 活跃 度 的 排序 。 


PI 或 RA 分 析 并 选择 出 少数 最 具 代表 性 的 提交 内 容 ， 作 为 
周 例会 的 讨论 主题 。 


er 5 Crowd Research 同行 评估 流程 


ip 集体 协作 学 术 成 果 产 出 模式 

0O 随 着 项 目 不 断 推进 ,记录 研究 过 程 和 阶段 性 结 
MERRIE ^E. Crowd Research 提出 了 一 种 集 
体 戎 作 的 学 术 论文 撰写 方式 ,定义 了 协作 过 程 以 及 个 
Jer. 

3.4.1 合作 撰写 学 术 论 文 Crowd Research 人 研究 框架 
中 论文 写作 本 身 通过 合作 完成 ( 见 表 2) 。 首 先 ,PI 确 
完 氨 题 方向 并 设计 论文 框架 ;其 次 ,多 位 公众 科研 人 员 
在 号 RI 的 指导 下 撰写 论文 ;最 后 ,PI 给 出 修改 意见 ， 
DJ 得 促 公众 完成 定稿 ,并 以 多 作者 名 义 向 期 刊 或 会 


议 提交 论文 。 
R2 学术 论文 的 合作 撰写 过 程 
执行 人 任务 分 工 
PI 建立 论文 模型 及 结构 
给 出 反馈 意见 
DRI 协调 并 指导 公众 科研 人 员 撰 写 论文 各 个 部 分 
公众 科研 人 员 撰写 论文 各 个 部 分 


公众 科研 人 员 倾 向 于 通过 文 持 评论 及 存储 编辑 记 
录 的 文本 编辑 器 来 协作 撰写 学 术 论文 ,每 次 编辑 都 代 
表 一 段 文本 的 插 人 或 删除 ,因此 ,可 通过 分 析 论文 编辑 
记录 挖掘 公众 科研 人 员 与 项 目 负 责 人 的 协作 过 程 , 也 
为 计算 合作 者 的 工作 量 和 贡献 提供 一 定 的 依据 。 以 一 
篇 HCI 项 目 论文 为 例 "” ,公众 科研 人 员 人 参与 编辑 8 360 
次 , 占 论文 编辑 总 比重 的 84% ; 而 项 目 负责 人 编辑 
1 580 次 , 占 比 16% ,其 中 项 目 负 责 人 主要 设计 论文 框 
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架 结 构 , 公 众 在 项 目 负责 人 的 指导 下 参与 撰写 论文 所 
有 部 分 ,如 图 6 所 示 : 
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6 HCI 项 目 论 文 编辑 过 程 


3.4.2. 合 著 论文 中 个 人 贡献 识别 及 承认 Crowd Re- 
search 为 众多 参与 者 提供 了 一 个 开放 的 协作 环境 , 公 
众 可 以 担任 不 同 的 身份 或 角色 , 既 可 以 是 推动 项 目 发 
展 的 领导 者 也 可 以 是 辅助 性 的 支持 者 。 在 这 种 关联 的 
开放 环境 中 ,个 人 贡献 的 发 现 及 识别 是 一 项 重要 的 难 
i. JM Y GRE eO CHR PAURA s AI IR] fe 
统 集中 化 分 配方 法 (由 项 目 负责 人 分 配 个 人 贡献 ) , 
Crowd Research 建立 了 去 集中 化 的 贡献 分 配 模式 (de- 
centralized credit system) ^ ,核心 思想 是 在 分 配 个 人 贡 
献 时 考虑 每 位 参与 者 的 意见 ,允许 公众 互相 分 配 贡 献 
值 ,并 将 参与 者 贡献 分 布 转化 为 图 形 问 题 。 随 后 ,基于 
PageRank 使 用 图 中 心性 算法 (Graph centrality algo- 
rithms) 修正 初始 贡献 排名 ,给 出 每 位 参与 者 最 终 的 页 
献 分 值 。 图 中 心性 算法 主要 考虑 被 普遍 认可 的 公众 参 
与 者 ,通过 设置 PageRank 阻尼 因子 以 及 限制 节点 外 链 
数 等 方法 避免 恶意 链接 ,解决 了 一 些 参与 者 只 与 个 别 
参与 者 进行 交互 的 问题 。 

去 集中 化 的 贡献 分 配方 法 包含 两 个 实施 步骤” 。 
首先 ,每 个 公众 参与 者 拥有 100 个 贡献 值 , 根 据 其 他 人 
对 论文 的 影响 程度 对 其 分 配 贡 献 值 ,项 目 负 责 人 对 贡 
献 分 配 情况 进行 汇总 得 出 初始 贡献 排名 ,并 以 加 权 有 
向 图 的 形式 进行 可 视 化 展示 ,其 中 每 个 节点 代表 参与 
者 , 边 权重 代表 一 名 参与 者 分 配给 另 一 名 参与 者 贡献 
值 。 其 次 ,基于 PageRank 得 出 修正 后 的 贡献 排名 , 假 
设 G =(P,C) 代 表 贡 献 图 ,其 中 P 是 参与 者 集合 ,C 是 
有 向 加 权 边 集合 。 进 一 步 假 设 C(i,j) s[0,1] ,表示 参 
与 者 i 给 予 j 的 贡献 比重 ,d 是 PageRank 阻尼 因子 ( 通 
常 d = 0.85) ,参与 者 i 每 次 迭代 后 的 PageRank 得 分 
pi(t) 为 : 


p) = ed (CP p(t -1) + CQ.) 


祝 忠 明 ， 和 白 林 林 . 科研 众 包 项 目的 协作 模式 研究 


以 Crowd Research 7548 [J]. El # F Cni La * 2078,62 e 


un 2) 


PI 和 DRI 根据 PageRank 分 数 共同 为 合 著作 者 设 
置 一 个 闵 值 ,高 于 阐 值 的 贡献 者 将 被 列 在 论文 作者 名 
单 中 , 低 于 阔 值 的 贡献 者 将 在 文章 致谢 部 分 提 及 。 以 


会 议论 文 *Boomerang: Rebounding the Consequences of 


Reputation Feedback on Crowdsourcing Platforms ”5 为 
例 , 共 有 79 位 贡献 者 ,其 中 ,论文 首页 公开 展示 的 作者 


有 37 位 ,致谢 部 分 提 及 的 作者 有 42 f, XE TE BU EL ON 
0.006, 


4 Crowd Research 对 我 国 开展 开放 协作 


研究 的 启示 


流 、 讨 论 任务 的 改进 方案 、 投 票选 出 最 优 结果 。 同 时 ， 

应 积极 鼓励 公众 科研 人 员 提 交 并 保存 包含 研究 方法 、 
研究 理论 .模型 .算法 等 的 研究 笔记 ,通过 视频 会 议 为 
公众 科研 人 员 dissi ag NR 此 
外 ,项 目 负责 人 还 应 为 公众 参与 者 建 立 一 定 的 申诉 渠 

xa dA NON 寺 程 或 贡献 分 配 
等 方面 可 能 发 生 的 矛盾 。 
由 专业 科研 人 员 和 公共 科研 人 员 协 同 参与 的 科研 

组 织 模式 为 知识 产权 管理 带 来 了 新 的 挑战 ,需要 探索 
科学 贡献 确认 和 激励 的 新 机 制 。 今 后 ,我 国 组 织 大 规 
模 科学 合作 时 ,可 以 从 深度 和 广度 两 方面 开展 科学 贡 
献 的 模式 探索 , 深度 方面 ,使 用 学 术 贡 献 及 角色 本 体 


Crowd research 通过 使 用 在 线 招募 .召开 周 例会 、 
设 定 研究 里 程 碑 .同行 评估 集体 协作 产 出 学 术 成 果 等 
创 洒 模式 和 方法 ,对 传统 的 科研 众 包 模式 进行 了 发 展 ， 
形 讽 了 一 种 专业 科研 人 员 主导 和 大 众 科研 人 员 协同 参 
与 本 研 全 过 程 的 新 型 组 织 模式 ,对 于 我 国 尚 处 在 起 步 
院 镜 的 科研 众 包 模式 的 快速 发 展 具有 重要 的 借鉴 意 
六 二 本 文 从 公众 科研 人 员 的 组 织 招募 科研 全 过 程 的 
KOAR 公众 科研 人 员 科学 贡献 的 计算 和 确认 三 方 
IRE HH Crowd Research 对 我 国 发 展 科研 众 包 
Histo. 

R 信众 参 与 者 招募 方面 ,Crowd Research 采用 了 非 定 
[^ ARR RUE Hf 募 相 结合 的 招募 模式 ,并 通过 Twitter 
FI Facebook 等 知名 社交 平台 进行 宣传 推广 ,鼓励 公众 
科 三 人 员 通 过 参与 众 包 项 目 获取 在 世界 名 校 接受 继续 
教育 的 机 会 。 目 前 ,我国 大 力 提倡 大 众 创业 ,许多 高 校 
及 条 研 机 构 也 积极 鼓励 大 学 生 进行 创业 实践 。 此 外 ， 
参与 文化 (Participatory Culture) 已 被 社会 广泛 接受 05 。 
科研 机 构 可 以 借 此 机 遇 , 通 过 设立 项 目 网 站 、 群 发 邮件 
或 利用 微 信和 微 博 社交 平台 等 方式 进行 宣传 推广 , 吸 
引 大 学 生 ,研究 生 及 社会 公众 参与 科研 项 目 ; 同 时 面向 
国外 招募 科研 爱好 者 .专业 技术 人 员 或 学 生 , 形 成 国内 
外 开放 合作 的 公众 科研 参与 者 招募 模式 ,基于 虚拟 社 
区 构建 大 规模 的 研究 人 员 池 。 

科研 全 过 程 的 众 包 组 织 方面 ,Crowd Research 创建 
了 一 种 由 专业 科研 人 员 引 导 、 公 众 科研 人 员 协 同 参与 
的 科研 组 织 模式 。 我 国 可 在 “互联 网 +”、 人 工 智能 、 
大 健康 .新 材料 .新 能 源 和 节能 环保 等 领域 以 试点 项 目 
的 形式 引入 和 推行 此 模式 , 遂 选 出 各 领域 内 拥有 丰富 
研究 经 验 的 专家 学 者 担任 项 目 负责 人 ,通过 和 迭代 方式 
使 得 专业 科研 人 员 和 公众 科研 人 员 共同 设计 任务 工作 


SCoRO ^ 对 贡献 类 型 进行 细 分 ,并 根据 贡献 类 型 设置 
贡献 分 值 ;广度 方面 ,将 科研 过 程 中 涉及 的 不 同 活动 及 
成 果 纳 入 科学 贡献 的 计算 范畴 ,科学 贡献 的 活动 类 型 
多 种 多 样 ,包括 招募 参与 者 .组织 视频 会 议 .运行 算法 
等 ,科学 贡献 的 成 果 不 仅 包括 传统 的 成 果 类 型 (书籍 、 
论文 .专利 等 ) .也 包括 研究 数据 代码、 研究 方法 等 其 
他 成 果 形 式 。 此 外 ,科研 机 构 资助 方 应 积极 鼓励 科研 
人 员 建 立 基 于 科学 贡献 的 学 术 履 历 , 据 此 对 科研 人 员 
进行 评估 。 
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Crowd Research 作为 科研 众 包 的 典型 实践 ,描述 了 
公众 科研 人 员 在 专业 科研 人 员 的 领导 下 进行 在 线 合作 
的 科研 过 程 。 本 文通 过 分 析 Crowd Research 项 目的 协 
作 过 程 ,发 现 项 目 负责 人 与 公众 参与 者 之 间 建 立 了 良 
好 的 信任 关系 ,公众 参与 者 可 以 自行 选择 项 目 、 互 相 分 
配 贡 献 值 ,所 有 的 项 目 活动 均 由 公众 驱动 ,项 目 负 责 人 
仅 需 提供 研究 平台 .进行 内 容 选 择 、 确 立 研 究 方向 。 目 
前 我 国 科研 众 包 项 目 尚 处 于 起 步 阶 段 ,在 运作 流程 和 
管理 决策 方面 缺乏 战略 性 的 顶层 设计 ,可 以 借鉴 
Crowd Research 项 目的 协作 模式 为 我 国 开展 科研 众 包 
项 目 提供 参考 。 
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"Abstract. [ Purpose/significance | This paper presents the collaboration model of crowdsourcing research projects, 


tø" provide theoretical guidance and action guidelines for the development of collaborative research in China under open en- 


vironment. | Method/process] This paper analyzed the collaborative process of the Crowd Research project from four-as- 


pects , including the recruitment of public participants, synchronous collaboration, the submission of research results, and 


the production of academic results. The key steps of each part were described and some implications for the development of 


crowdsourcing research projects in China were summarized. [ Result/conclusion] This paper finds that Crowd Research 


has developed a new type of collaboration model of crowdsourcing research based on the crowdsourcing technology, in 


which public scientists can collaborate in the research process under the leadership of professional researchers, including 


independent selection of milestones, peer review submissions, mutual assignment of contribution values, co-publishing ac- 


ademic papers, etc. 
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